Компания HPE объявила о том, что оператор ЦОД Digital Realty намерен стандартизировать свою инфраструктуру по всему миру, которая включает 300 ЦОД в 25 странах и регионах, взяв за основу HPE Private Cloud Business Edition, сообщает пресс-служба компании. В результате Digital Realty сможет обрабатывать огромные объёмы данных, одновременно упростив управление ЦОД, повысив уровень безопасности и надёжности.

Как заявил представитель Digital Realty, компания владеет и управляет передовыми ЦОД по всему миру, что требует технологий для масштабирования в соответствии с ростом потребностей клиентов. HPE Private Cloud Business Edition обеспечит такое масштабирование и оптимизированное управление инфраструктурой с предсказуемой стоимостью владения.

Модернизация дата-центров поможет Digital Realty повысить операционную эффективность и управление рабочими нагрузками с минимизацией затрат. HPE позволяет полностью автоматизировать настройку инфраструктуры и управление жизненным циклом ЦОД, что даст Digital Realty возможность уделять меньше внимания решению инфраструктурных вопросов и больше концентрироваться на обеспечении бизнес-результатов для клиентов.

Источник изображения: HPE

Как заявили в HPE, Digital Realty стала исключительным технологическим и колокейшн-партнёром компании, оказав огромное доверие технологиям частных облаков, предлагаемым HPE. По данным HPE, HPE Private Cloud Business Edition снижает совокупную стоимость владения до 2,5 раз в сравнении с решениями конкурентов, а с помощью ПО HPE Morpheus VM Essentials и СХД HPE Alletra Storage MP B10000 управление ЦОД значительно упрощается.

Работая с партнёром HPE, компанией Infradax, Digital Realty уже оценила некоторые решения для хранения данных, после чего приняла решение о полной интеграции продуктов HPE. HPE и World Wide Technology (WWT) будут сотрудничать в деле развёртывания новых решений в дата-центрах Digital Realty по всему миру.

В минувший четверг в дата-центре Digital Realty PDX11 в технопарке Хиллсборо (Hillsboro) в Орегоне произошёл пожар, который привёл к сбоям в социальной сети X (Twitter) Илона Маска (Elon Musk), которая является одним из арендаторов ЦОД. По предварительным данным, возгорание произошло в помещении, где находились аккумуляторы резервного питания, сообщает Wired. Персонал эвакуировали. На устранение инцидента у пожарных ушло несколько часов, но, к счастью, никто не пострадал.

По словам местных пожарных, пожар начался в помещении, заполненном (предположительно) литий-ионными аккумуляторами. Хотя такие аккумуляторы распространены в современных ЦОД, именно они нередко и становятся причиной возгораний. Малейшая ошибка в контрле температуры, обслуживании или установке способна привести к неконтролируемому перегреву и возгораниям. Хотя пламя не распространилось за пределы аккумуляторного зала, дым был достаточно густым, чтобы вызвать обеспокоенность.

Digital Realty не стала уточнять, кто именно является арендатором её ЦОД. Представители X тоже отказались от комментариев. Впрочем, как сообщает Datacenter Dynamics, с 23 мая в течение нескольких суток в работе X наблюдаются сбои разного масштаба. В официальном аккаунте компания сообщается, что она знает о проблемах и работает над их устранением.

Источник изображения: raquel raclette/unsplash.com

До покупки Маском в 2022 году социальная сеть использовала в США три ЦОД: в Сакраменто, Портленде и Атланте. В случае отказа одного дата-центра трафик можно было перенаправить на другие. В конце 2022 года Маск принял неоднозначные меры по сокращению расходов и закрыл площадку в Сакраменто. В результате всего через несколько дней случился крупный сбой, доказавший, что система стала хрупкой — компания поспешила перенести нагрузки в Портленд и Атланту. В итоге дата-центр NTT GDC в Сакраменто достался Tesla. Кроме того, Маск какое-то время отказывался оплачивать услуги облаков Google и Oracle, а поставщик серверов Wiwynn подал к X иск за неоплату счетов и несоблюдение условий контракта.

Пожары в дата-центрах — явление не такое уж уникальное. В сентябре 2024 года Alibaba Cloud пострадала от пожара в ЦОД в Сингапуре, от большого пожара в своём время пострадал ЦОД OVHCloud в Страсбурге. Один из крупнейших в истории индустрии инцидентов тоже оказался связан с Li-Ion аккумуляторами, безопасность которых вызывает всё больше вопросов. Основными же причинами отключений ЦОД по-прежнему являются человеческие ошибки и сбои в электроснабжении.

Идея передачи энергохранилищами дата-центров электричества в энергосети в часы пиковых нагрузок может показаться многообещающей, но операторы ЦОД, похоже, после нескольких тестов в Ирландии смотрят на эту идею без особого энтузиазама. Причина в высокой цене проектов обратной передачи энергии в сеть и технической сложности реализации, сообщает The Register.

ЦОД с «интерактивными» системами резервного питания, использующие аккумуляторные хранилища (BESS), должны были передавать электричество обратно в магистральные электросети, когда это необходимо для стабилизации спроса и предложения во времена пиковых нагрузок — тем более, что сети всё чаще зависят от источников возобновляемой энергии вроде ветра и солнца. В частности, эксперименты по использованию таких систем проводили Microsoft и Digital Realty в районе Дублина. Дублин выбрали не случайно, поскольку очень много дата-центров расположено именно вокруг столицы, а в 2023 году на ЦОД пришлась пятая часть всего энергопотребления страны.

Microsoft объединила усилия с Eaton ещё в 2022 году, а Digital Realty начала внедрять аналогичную схему в прошлом году. Агрегатором в обоих случаях является Enel X, продающая энергию из различных источников ирландскому энергооператору EirGrid. На энергию из возобновляемых источников, которые не отличаются стабильностью отдачи, приходится значительная часть поставок — более 35 % только на ветряную энергию. Поэтому Ирландия остро нуждается в стабилизации поставок электричества в сеть хотя бы в минимальных объёмах. Идея «умных» BESS предусматривает передачу части запасённой в АКБ энергии в общие сети. Считается, что операторы ЦОД смогут даже заработать на этом.

Источник изображения: Federico Beccari/unsplash.com

Тем не менее, по словам Digital Realty, обратная передача в сеть — вопрос довольно непростой, поскольку немногие ЦОД имеют для этого специальную инфраструктуру, а для реализации такой схемы требуются дополнительные инвестиции. Другие эксперты придерживаются схожих мнений о том, что организовать «двухсторонний» поток энергии намного сложнее, чем в одну сторону. Кроме того, главная функция BESS — питать критически важное оборудование в случае отключения подачи энергии в течение заданного срока, поэтому заряд необходимо хранить для самих ЦОД «на всякий случай».

Microsoft подтвердила, что в Дублине её «интерактивная» система всё ещё функционирует, но реализация схожей модели на других рынках будет зависеть от конкретных условий на местах, такой проект нельзя будет реализовать где угодно. Впрочем, уже рассматриваются и другие локации. В IDC отмечают, что для ЦОД строить избыточные резервные мощности слишком дорого, поэтому операторы даже не будут рассматривать такую схему. Напротив, собственные энергохранилища стоило бы создать самим коммунальным компаниям — такой «буфер» был бы вполне востребован во времена пиковых нагрузок.

Источник изображения: Federico Beccari/unsplash.com

В Digital Realty напомнили, что Ирландия — вообще уникальный случай, поскольку речь идёт о небольшой стране с энергосетью ограниченных размеров при полном отсутствии свободных мощностей, поскольку электричество буквально пожирается ЦОД. По некоторым оценкам, на дата-центры уже приходится около 30 % энергопотребления всей Ирландии, тогда как во Франции их доля составляет лишь 4 %, а в Германии и Великобритании — 6 %.

Частью проблемы, как считают в Digital Realty, являются и сами электрические сети. В некоторых местах вроде Франции наблюдается даже перепроизводство энергии, но от этого не легче. Энергокомпания EDF готова отдать земли при АЭС для ЦОД — или оператор доставляет энергию к ЦОД, или ЦОД приходится строить там, где есть энергия. Но во Франции энергия для дата-центров нужна в Париже и Марселе, а АЭС расположены в глубинке. Пытаясь генерировать собственное электричество оператор ЦОД фактически превратится в энергокомпанию.

Проблемы с присоединением к энергосетям наблюдаются по всей Европе и США. Многие операторы уже реализуют проекты генерации электричества от газовых турбин, включая Crusoe и других игроков. Отмечаются и попытки найти нетривиальные решения. В США IT-гиганты вроде Microsoft и Amazon всё чаще пытаются перепрофилировать АЭС для снабжения своих ЦОД, хотя на реализацию могут уйти годы.

Катастрофический пожар, произошедший во вторник на прошлой неделе в сингапурском дата-центре Digital Realty, всё ещё осложняет работу облачных операторов. The Register, в частности, сообщает, что к полноценной работе не может приступить облачный регион Alibaba Cloud — в компании ждут, когда просохнет оборудование, чтобы попытаться восстановить данные.

Согласно данным Alibaba Cloud, миграция и восстановление данных в повреждённом ЦОД SIN11 идёт по плану. Работа облачных сервисов постепенно восстанавливается. В компании подчеркнули, что часть оборудования по-прежнему находится в небезопасной и заблокированной зоне дата-центра. О возможном затоплении ряда помещений пожарные предупредили оператора заранее. Некоторое оборудование требует тщательной просушки до того, как можно будет попытаться запустить его без дополнительной угрозы целостности данных. На их восстановление уйдёт некоторое время. Из-за сбоя Alibaba Cloud, как выяснилось, пострадали и различные сервис-провайдеры, включая Lazada и ByteDance.

Источник изображения: Adam Wilson/unsplash.com

Причиной пожара, вероятно, стало возгорание Li-Ion элементов ИБП. Сообщалось, что для тушения и охлаждения АКБ пришлось задействовать пожарного робота, поскольку аккумуляторы могли повторно воспламениться, взорваться и выделить токсичные вещества. Ситуация усугублялась тем, что АКБ находились на третьем этаже четырёхэтажного ЦОД. Хотя современные нормы Сингапура предписывают размещать ИБП на первом этаже, объект Digital Realty ввели в эксплуатацию задолго до принятия этих норм. Это единственный из трёх кампусов Digital Realty в Сингапуре, созданный на основе уже имеющейся инфраструктуры. Ещё два были возведены с нуля.

Источник изображения: Daan Mooij / Unsplash

Как сообщает Alibaba Cloud, к вечеру злополучного вторника всё ещё звучала пожарная сигнализация, а некоторое сетевое оборудование функционировало со сбоями из-за высоких температур. Клиентов предупредили о возможных сбоях во всех зонах доступности данного облачного региона. В среду большинство облачных сервисов восстановили работу в результате переноса части нагрузок. В пятницу было объявлено, что часть оборудования находится «в стадии безопасной миграции». В субботу уже проводилась подготовка к установке оборудования, включая его сушку.

От грандиозного пожара в своём время пострадал ЦОД OVHCloud в Страсбурге, долгое время оператор разбирался многочисленными претензиями пользователей. В самом Сингапуре после крупного сбоя дата-центра Equinix в прошлом году власти пообещали жёстко отрегулировать деятельность ЦОД и облаков.

10 сентября 2024 года в сингапурском дата-центре Digital Realty SIN11 произошёл пожар, последствия которого ещё предстоит оценить. По информации Datacenter Dynamics, больше всех пострадало облако Alibaba Cloud, одна из зон доступности (Singapore Availability Zone C) которого была развёрнута на базе этого ЦОД. Также пострадали Lazada, ByteDance, Digital Ocean, Coolify и Cloudflare.

Пожар начался во вторник в 7:45 по местному времени. В течение получаса весь персонал был эвакуирован. Причиной пожара предварительно названо возгорание литий-ионных аккумуляторов в ИБП на третьем этаже четырёхэтажного здания. Силы гражданской обороны Сингапура (Singapore Civil Defence Force, SCDF) даже применили автономного робота в попытке охладить аккумуляторные блоки, однако в результате в отсеке и соседних помещениях стала накапливаться вода, из-за чего возник риск коротких замыканий.

В итоге пришлось экстренно отключать питание одного из зданий, что также привели к проблемам с сетевым подключением в соседних зданиях. Работы по тушению и устранению рисков заняли более суток. К вечеру среду пожарные службы всё ещё не пускали в пострадавшие помещения инженеров ЦОД и его клиентов. По словам Digital Realty, сейчас ситуация стабилизировалась, а надёжность конструкций самого здания в результате пожара не пострадала.

Источник изображения: Digital Realty

ЦОД SIN11 Digital Loyang 1 включает четыре здания общей площадью 17 тыс. м². Он был введён в эксплуатацию в 2016 году. Стандарты SCDF требуют, чтобы все системы хранения энергии (Energy Storage Systems, ESS) находились на первом этаже. При этом Digital Realty отметила, что новые правила ввели в действие с 2020 года, через четыре года после запуска SIN11.

Ранее от грандиозного пожара пострадал оператор ЦОД OVHCloud, который долго время разбирался многочисленными претензиями клиентов. Крупнейший в мире инцидент с южнокорейском ЦОД Kakao тоже произошёл из-за Li-Ion аккумуляторов. Весной 2023 года пожар в ЦОД LAX12 той же Digital Realty привёл к приостановке обслуживания части клиентов. А в самом Сингапуре после масштабного сбоя дата-центра Equinix власти пообещали жёстко отрегулировать деятельность ЦОД и облаков.

Компания Didital Realty внедрила прямое жидкостное охлаждение чипов (DLC) на 170 своих колокейшн-объектах, размещённых по всему миру. Datacenter Dynamics сообщает, что речь идёт о комбинации решений вроде теплообменников задней двери (RDHx) и собственно DLC. В результате плотность размещения оборудования достигает 30–150 кВт на стойку, а в некоторых случаях ещё больше.

По данным самой компании, совместное использование RDHx и DLC позволяет удвоить плотность стоек в сравнении с решениями прошлого поколения. В августе прошлого года компания предложила решения на основе AALC — гибридной системы Air-Assisted Liquid Cooling, как раз совмещающей RDHx и DLC. На тот момент сообщалось о пороге в 70 кВт на стойку на 28 региональных рынках Северной Америки, Европы. Ближнего Востока и Азиатско-Тихоокеанского региона.

По данным компании, новое решение будет использовать уже существующую инфраструктуру, чтобы удовлетворить растущие потребности ИИ-систем и станет применяться в более половины подконтрольных ЦОД. Вместе с тем планируется и дальнейшее внедрение разработок на новых площадках. Известно, что в проекте участвует Lenovo Infrastructure Solutions Group (ISG), но роль компании не раскрывается.

Источник изображения: Digital Realty

Ранее жидкостное охлаждение Digital Realty уже опробовала в нескольких ЦОД, включая объекты во Франции и Сингапуре. Компания также является инвестором стартапа Colovore, управляющего в Калифорнии ЦОД с жидкостным охлаждением. Не дремлют и конкуренты. Так, оператор Equinix сообщил о готовности поддержать использование прямого жидкостного охлаждения более чем в 100 дата-центрах ещё в декабре прошлого года.

Оператор дата-центров Digital Realty намерен реорганизовать систему питания своих ЦОД в Ирландии таким образом, чтобы та могла отдавать электричество в энергосети во время пиковых нагрузок. The Register сообщает, что это поможет сгладить нагрузки на энергосистемы, снизить выбросы углекислого газа и обеспечить операторам дополнительную выручку.

Один из крупнейших в мире операторов дата-центров работает с энергораспределяющей компанией Enel X, которая позволит сохранить стабильность сетей с помощью систем бесперебойного питания ЦОД. Это, например, даст возможность снизить зависимость от электростанций, работающих на ископаемом топливе в часы максимальных нагрузок. Digital Realty уже ранее реализовала подобный проект с помощью Enel X в Сиднее.

Только вокруг Дублина оператор ЦОД имеет девять объектов. Он утверждает, что аккумуляторы их ИБП прошли самые строгие проверки и одобрены для снабжения резервной энергией электросетей. Для начала в программе будут участвовать источники бесперебойного питания мощностью 6 МВт. Соглашение с Enel X позволит Digital Realty использовать по-новому использовать энергетические активы дата-центров, в числе прочего позволяя подключать к сети больше возобновляемых источниках энергии.

Источник изображения: israel palacio/unsplash.com

Ирландия уже получает 30–40 % энергии из возобновляемых источников, что имеет и негативные стороны. В частности, неизбежны перепады качества энергоснабжения из-за нестабильности работы ветряков и других подобных источников. В Digital Realty подчёркивают, что в таких ситуациях пригодится энергия ИБП дата-центров. В этом месяце оператор EirGrid объявил о снижении минимального числа больших генераторов на ископаемом топливе, которые должны работать в энергосети страны в любое время — с пяти до четырёх, в ответ на растущую доступность возобновляемой энергии.

Впрочем, Digital Realty не первой представляет подобную схему в Ирландии. Microsoft уже анонсировала внедрение интерактивной ИБП-технологии в собственном ЦОД в Дублине в середине 2022 года, она сотрудничает с Eaton и той же Enel X. Последняя служит агрегатором для объединения коммерческих источников энергии в «виртуальные электростанции». В прошлом году Microsoft объявила, что проект увенчался успехом и заявила о намерении масштабировать его на другие ЦОД по всей планете.

Энергия для ЦОД стала весьма обсуждаемой темой в последнее время, эксперты предупреждают, что рост ёмкости дата-центров на фоне взрывного спроса на ИИ-сервисы может привести к тому, что только в США ЦОД будет потребляться к 2030 году 20–25 % всей электроэнергии, а в Ирландии к 2026 году — около трети. Это уже привело к рационированию вычислительных ресурсов AWS.

Американский оператор дата-центров Digital Realty, по сообщению ресурса Datacenter Dynamics, намерен использовать гидрированное растительное масло (HVO) вместо дизельного топлива в своих резервных генераторах на некоторых площадках в США. Это позволит снизить выбросы вредных газов в атмосферу.

HVO производится из растительных масел и отработанных жиров. Это на 90 % углеродно-нейтральный возобновляемый вид топлива с повышенным сроком хранения без окисления. Важно, что HVO можно применять в дизель-генераторах без внесения модификаций в силовую установку. Кроме того, HVO можно смешивать с дизельным топливом.

Сообщается, что Digital Realty начнёт использовать HVO в резервных генераторах на площадках PDX12 в Хиллсборо (штат Орегон), а также SC1 в Санта-Кларе и LAX12 в Эль-Сегундо (обе — Калифорния). По оценкам компании, инициатива позволит сократить выбросы СО₂ приблизительно на 12 тыс. т.

Источник изображения: Digital Realty

Впервые Digital Realty начала применять HVO в дата-центрах в Париже (Франция) в 2022 году. Позднее инициатива была распространена на Мадрид (Испания) и другие европейские ЦОД. На сегодняшний день Digital Realty использует HVO более чем на 20 объектах по всей Европе, в том числе в Амстердаме. С учётом США данный вид топлива будет применяться в дизель-генераторах на семи рынках присутствия компании.

Аналогичные проекты реализуют и другие операторы дата-центров и облачных платформ. К примеру, около года назад к переводу дизель-генераторов на HVO в европейских ЦОД приступила AWS. Вместе с тем американская корпорация Kohler Power Systems объявила, что выпускаемые ею дизельные генераторы могут работать на HVO без каких-либо доработок.

Отмечается, что Digital Realty вместе с Schneider Electric реализует ещё одну инициативу, направленную на снижение вредного влияния на экологию. Она предусматривает продление срока службы критически важных систем на площадке PAR6 в Париже. Речь идёт о части электрооборудования, распределительных устройствах и ИБП. Планируется повторное использование отдельных компонентов и внедрение новых программ переработки и восстановления. Ожидается, что в течение следующих 3–5 лет проект поможет Digital Realty дополнительно снизить выбросы углерода, одновременно увеличив жизненный цикл оборудования, включая батареи ИБП.

Восемь операторов ЦОД сформировали группу Asia-Pacific Data Centre Association (APDCA) для защиты интересов и продвижения законов, поддерживающих рост участников группы в Азиатско-Тихоокеанском регионе (APAC). Как сообщает Datacenter Knowledge, в число основателей вошли AirTrunk, Digital Realty, Equinix, Global Switch, NTT Global Data Centers, Princeton Digital Group, ST Telemedia Global Data Centres и Vantage Data Centers.

По данным Synergy Research Group, именно эти компании занимают 40 % рынка ЦОД в регионе APAC без учёта материкового Китая. В APDCA подчёркивают, что роль ЦОД и связанной инфраструктуры в регионе ещё никогда не была так велика на фоне роста местных экономик и повсеместного распространения 5G, генеративного ИИ, Интернета вещей и других технологий. APDCA будет управляться советом директоров, назначенных основателями организации. Скоро состоится собрание для выбора председателя и определения повестки ассоциации.

Как сообщает Structure Research, рынок колокейшн-сервисов в регионе в прошлом году достиг ёмкости 10 223 МВт, это около 40 % от мирового. Ожидается, что к 2028 году этот показатель достигнет 19 069 МВт, среднегодовой прирост в ближайшие пять лет составит 13,3 %. Азия уже стала центром роста для бизнеса, связанного с ЦОД. Инвестиции в дата-центры стимулируют и обновление местной государственной инфраструктуры, а регион привлекает всё больше квалифицированных IT-специалистов.

Источник изображения: zephylwer0/pixabay.com

Как заявляют в европейской European Data Centre Association (EUDCA), в организации с интересом следят за развитием APDCA. Хотя структуры действуют в различных политических и правовых средах, многие из решаемых вопросов по своей природе носят общемировой характер — от проблем строительства ЦОД будущего до вопросов достижения приемлемого уровня экоустойчивости. В дальнейшем планируется координировать действия APDCA и EUDCA по ряду вопросов.

Компания Blackstone Inc. заключила с Digital Realty Trust Inc. соглашение о создании совместного предприятия (СП). Как сообщает Bloomberg, это позволит компаниям расширить присутствие на рынке ЦОД — партнёры намерены создать четыре кампуса во Франкфурте, Париже и Западной Вирджинии.

Оценочная стоимость совместных проектов за несколько лет реализации составит порядка $7 млрд. Blackstone достанется 80 % СП, а Digital Realty получит 20-% долю и будет управлять рутинными процессами в новых дата-центрах. СП будет сформировано в два этапа в I половине 2024 года, после получения одобрения регуляторов и других разрешений. По данным Datacenter Dynamics, будет построено 10 ЦОД общей ёмкостью 500 МВт.

Источник изображения: Blackstone

В Blackstone заявили, что спрос на новые ЦОД подогревается «гонкой вооружений» в сфере искусственного интеллекта (ИИ). Подобные ЦОД обычно рассчитаны на поддержку облачных сервисов и часто требуют огромного количества электроэнергии. По словам президента Blackstone Джона Грея (Jon Gray), сейчас наблюдается рост спроса, случающийся «один раз в поколение», драйвером которого стали повсеместное внедрение облачных технологий и революция в сфере ИИ.

Blackstone является инвестором в «альтернативные» активы, отличные от обычных ценных бумаг и высоколиквидной недвижимости — например, в дата-центры, которые пока ещё не стали мейнстримом на рынке инвестиций. В 2021 году компания приобрела оператора QTS Realty Trust (включая долги в объёме $10 млрд) и вложила $8 млрд в развитие ЦОД. В конце октября фонд Blackstone Real Estate Income Trust, заявил, что 8 % вложений из его портфеля связаны с дата-центрами, которые стали самым доходным активом в уходящем году.

В июле Digital Realty анонсировала создание совместного предприятия с инвестиционной компанией TPG Real Estate, вложив в партнёрство стоимостью $1,5 млрд три уже действующих в Северной Вирджинии дата-центра. Также она имеет совместный бизнес стоимостью $200 млн с Realty Income Corporation. В Японии компания имеет СП на $1,8 млрд с Mitsubishi и аналогичное партнёрство с Brookfield Infrastructure в Индии, в том и другом случае строятся новые ЦОД.